Cognitive screening instruments for dementia: comparing metrics of test limitation / Instrumentos de rastreio cognitivo para a demência: comparação métrica da limitação dos testes

ABSTRACT Cognitive screening instruments (CSIs) for dementia and mild cognitive impairment are usually characterized in terms of measures of discrimination such as sensitivity, specificity, and likelihood ratios, but these CSIs also have limitations. Objective: The aim of this study was to calculate various measures of test limitation for commonly used CSIs, namely, misclassification rate (MR), net harm/net benefit ratio (H/B), and the likelihood to be diagnosed or misdiagnosed (LDM). Methods: Data from several previously reported pragmatic test accuracy studies of CSIs (Mini-Mental State Examination, the Montreal Cognitive Assessment, Mini-Addenbrooke's Cognitive Examination, Six-item Cognitive Impairment Test, informant Ascertain Dementia 8, Test Your Memory test, and Free-Cog) undertaken in a single clinic were reanalyzed to calculate and compare MR, H/B, and the LDM for each test. Results: Some CSIs with very high sensitivity but low specificity for dementia fared poorly on measures of limitation, with high MRs, low H/B, and low LDM; some had likelihoods favoring misdiagnosis over diagnosis. Tests with a better balance of sensitivity and specificity fared better on measures of limitation. Conclusions: When deciding which CSI to administer, measures of test limitation as well as measures of test discrimination should be considered. Identification of CSIs with high MR, low H/B, and low LDM, may have implications for their use in clinical practice.

RESUMO Os instrumentos de rastreio cognitivo (IRCs) para demência e comprometimento cognitivo leve são geralmente caracterizados em termos de medidas de discriminação, como sensibilidade, especificidade e razões de probabilidade, mas esses IRCs também têm limitações. Objetivo: Calcular várias medidas de limitação de testes para IRC comumente usados, a saber: taxa de classificação incorreta; relação entre dano líquido e benefício líquido; e probabilidade de diagnóstico ou diagnóstico incorreto. Métodos: Os dados de vários estudos de precisão de teste pragmático de IRC relatados anteriormente (MMSE, MoCA, MACE, 6CIT, AD8, TYM, Free-Cog) e realizados em uma única clínica foram reanalisados para calcular e comparar a taxa de classificação incorreta, o dano líquido para a relação de benefício líquido e a probabilidade de diagnóstico ou diagnóstico incorreto para cada teste. Resultados: Alguns IRC com sensibilidade muito alta, mas baixa especificidade para demência, tiveram desempenho ruim em medidas de limitação, com altas taxas de classificação incorreta, baixo prejuízo líquido para relações de benefício líquido e baixa probabilidade de diagnóstico ou diagnóstico incorreto; alguns tinham probabilidades de favorecer o diagnóstico incorreto ao invés do diagnóstico. Testes com melhor equilíbrio de sensibilidade e especificidade saíram-se melhor nas medidas de limitação. Conclusões: Ao decidir qual IRC administrar, as medidas de limitação, bem como as medidas de discriminação do teste, devem ser consideradas. A identificação de IRC com alta taxa de classificação incorreta, baixa relação de prejuízo e benefício e baixa probabilidade de diagnóstico ou diagnóstico incorreto pode ter implicações para seu uso na prática clínica.

Mini-Cog versus Codex (cognitive disorders examination) Is there a difference? / Mini-Cog versus Codex (exame de distúrbios cognitivos): existe alguma diferença?

Abstract. Mini-Cog and Codex (cognitive disorders examination) are brief cognitive screening tests incorporating word-recall and clock drawing tests. Objective: To assess and compare the screening accuracy of Mini-Cog and Codex for diagnosis of dementia and mild cognitive impairment (MCI) in patients attending a dedicated cognitive disorders clinic. Methods: Tests were administered to a consecutive cohort of 162 patients, whose reference standard diagnoses based on clinical diagnostic criteria were dementia (44), MCI (26), and subjective memory complaint (92). Results: Both Mini-Cog and Codex had high sensitivity (>0.8) for dementia diagnosis, but Codex was more specific. For diagnosis of MCI, Mini-Cog had better sensitivity than Codex. Weighted comparisons of Mini-Cog and Codex showed only marginal net benefit for Mini-Cog for dementia diagnosis but larger net benefit for MCI diagnosis. Conclusion: In this pragmatic study both Mini-Cog and Codex were accurate brief screening tests for dementia but Mini-Cog was better for identification of MCI.

Resumo. Mini-Cog e Codex são testes breves de triagem cognitiva incorporando testes de recuperação de palavras e desenho de relógio. Objetivo: Avaliar e comparar a precisão da triagem de Mini-Cog e Codex (exame de distúrbios cognitivos) para o diagnóstico de demência e comprometimento cognitivo leve (CCL) em pacientes atendidos em uma clínica dedicada a distúrbios cognitivos. Métodos: Os testes foram administrados a uma coorte consecutiva de 162 pacientes, cujos diagnósticos padrão de referência com base em critérios clínicos de diagnóstico foram demência (44), CCL (26) e queixa subjetiva de memória (92). Resultados: O Mini-Cog e o Codex apresentaram alta sensibilidade (>0,8) para o diagnóstico de demência, mas o Codex foi mais específico. Para o diagnóstico de CCL, o Mini-Cog teve melhor sensibilidade que o Codex. As comparações ponderadas de Mini-Cog e Codex mostraram apenas um benefício líquido marginal para o Mini-Cog para o diagnóstico de demência, mas um benefício líquido maior para o diagnóstico de CCL. Conclusão: Neste estudo pragmático, o Mini-Cog e o Codex foram testes breves de triagem precisos para demência, mas o Mini-Cog foi melhor para a identificação de CCL.